Agent-Editing World Model: Rethinking World Modeling for LLM Agents
智能体编辑世界模型:为LLM智能体重新思考世界建模
🧭 Agent 世界模型 · 决策状态编辑 ★ 深度解读
中国人民大学高瓴人工智能学院
提出AEWM,将世界模型从预测环境观测转为编辑智能体状态,缓解任务状态污染并提升长程智能体表现
📌 工作参考价值(4 点)
- 在电商/搜索 Agent 场景,不要花大力气预测高熵搜索结果或工具返回,而是训练一个动作效应判别器(critical / exploratory / noisy),在真实执行前截断 noisy 决策,直接编辑 reasoning+action 再执行,能减少无效检索和错误假设累积。
- 三分类(critical / exploratory / noisy)比二元好坏更实用:保留信息收集类探索动作,避免过度剪枝;可用于 query 选择、页面抓取、工具调用门控等环节。
- 用修正后的轨迹做 rejection sampling fine-tuning(AEWM-RFT),可将在线干预能力蒸馏回小 agent,线上无需额外世界模型,适合部署受限场景;类似把 verifier / controller 蒸馏进策略模型。
- 数据合成可复用:用强模型标注成功轨迹中每步贡献类型,将被判为 noisy 的步作为 revision 训练样本,并依据后续真实执行是否取得实质进展过滤,能获得高质量的状态纠正数据。